Gia Luật Lý Hồ sinh năm 911, là con trai thứ ba của tù trưởng người Khiết Đan Gia Luật A Bảo Cơ và vợ Thuật Luật Bình, trên ông còn có anh cả Gia Luật Bội và anh hai Gia Luật Đức Quang.[1] Gia Luật Lý Hồ là con trai nhỏ nhất của Thuật Luật Bình, song con trai nhỏ nhất của Gia Luật A Bảo Cơ là Gia Luật Nha Lý Quả (耶律牙里果), do Tiêu thị sinh.[2] Năm 916, Gia Luật A Bảo Cơ xưng là hoàng đế, đặt quốc hiệu là Khiết Đan[3]

Khi còn thiếu niên, Gia Luật Lý Hồ được thuật là dũng hãn, đa lực, tính tàn khốc. Mỗi lần tức giận vì những điều nhỏ nhặt, ông liền cho thích chữ vào mặt người khiến ông tức giận, hoặc ném họ vào nước hay lửa. Khi Liêu Thái Tổ quan sát các hoàng tử ngủ, thấy Gia Luật Lý Hồ co người nằm ở phía trong, Thái Tổ nói tất là thấp kém trong chư tử. Khi đại hàn, Thái Tổ yêu cầu ba hoàng tử đi kiếm củi, Gia Luật Đức Quang không chọn loại củi nên lấy củi về sớm nhất; Gia Luật Bội chọn củi khô rồi bó lại và trở về, xếp thứ hai; Gia Luật Lý Hồ kiếm được ít và để mất nhiều trên đường, khi trở về thì thu tay trong áo và đứng đó. Thái Tổ nói Trưởng xảo, còn Thứ thành, Thiếu không bằng được. Tuy nhiên, Gia Luật Lý Hồ được Thuật Luật hoàng hậu yêu mến.[1]